Tencent ने आज ओपन-सोर्स MOE बड़ा भाषा मॉडल Hunyuan-large लॉन्च किया, जिसका कुल पैरामीटर संख्या 398B है, सक्रिय पैरामीटर संख्या 52B है। सार्वजनिक परीक्षण परिणाम दिखाते हैं कि Tencent Hunyuan Large CMMLU, MMLU, CEva1, MATH और अन्य बहु-विषयक समग्र मूल्यांकन सेटों में साथ ही चीनी और अंग्रेजी NLP कार्यों, कोडिंग और गणित जैसे 9 प्रमुख आयामों में पूरी तरह से अग्रणी है, जो Llama3.1, Mixtral आदि जैसे प्रमुख ओपन-सोर्स बड़े मॉडलों को पार करता है। ऐसा बताया गया है कि इस मॉडल में तकनीकी नवाचार के माध्यम से उच्च गुणवत्ता वाले संश्लेषण डेटा प्राप्त किया जा सकता है।

MiniMax ने 2024 के 16 जनवरी को भारत में पहला MoE बड़ा भाषा मॉडल abab6 लॉन्च किया। MoE आर्किटेक्चर ने abab6 को जटिल कार्यों को संभालने की क्षमता प्रदान की है, और यह एक इकाई समय में अधिक डेटा को प्रशिक्षित करने में सक्षम है। abab6 निर्देशों के पालन, चीनी समग्र क्षमताओं और अंग्रेजी समग्र क्षमताओं में पूर्व संस्करण abab5.5 की तुलना में बेहतर है। abab6 ने अद्भुत क्षमताओं का प्रदर्शन किया, जैसे बच्चों को गणित के प्रश्न सिखाना और शंघाई के बारे में एक काल्पनिक बोर्ड गेम बनाने में मदद करना।